Ông ta sinh ra tại San Fernando, Cádiz, Tây Ban Nha, trong một gia đình du mục, người con thứ hai trong 8 người con. Mẹ ông là Juana Cruz Castro, a một người đan rổ ("La Canastera"), mà có ảnh hưởng lớn đến việc ca nhạc của ông. Cha ông, Juan Luis Monje, cũng là một ca sĩ cũng như là một thợ rèn, và có một lò rèn nơi Camarón đã làm việc khi còn là một thiếu niên.[2] Chú ông José đã đặt tên ông là Camarón (tiếng Tây Ban Nha: "Shrimp") bởi vì ông có tóc vàng hoe và da trắng. Khi cha ông chết vì bệnh xuyển, trong khi vẫn còn trẻ, gia đình ông gặp khó khăn tài chính. Vào lúc 8 tuổi, ông bắt đầu hát tại các quán ăn và trạm xe buýt với Rancapino để kiếm tiền. Khi được 16 tuổi, ông đạt được giải nhất tại đại nhạc hội del Cante Jondo ở Mairena de Alcor.[2] Camarón sau đó lên Madrid với Miguel de los Reyes và vào năm 1968 trở thành nghệ sĩ chính thức của Tablao Torres Bermejas nơi ông ở lại đó 12 năm trường.[1]